В ходе блужданий по материалам, связанных с дискурсом, нашел вот такую штуку:

"ISANLP is a Python 3 library that encompasses several open-source natural language processing tools for English and Russian"

Среди прочего там есть "Russian semantic role labeler (SRL) based on FrameBank and neural network models.", что делает этот пакет потенциально ( Read more... )

Учебный NLP - это когда разбираем хорошо написанный текст:

"Ещё при жизни Пушкина сложилась его репутация величайшего национального русского поэта"

Красота синтаксического разбора, подкрепленная всей мощью технологий и достижениями computer science и machine learning:
( Read more... )

Раз в два-три года я пробую делать какой-то новый парсер для русского языка. Последний раз это была неудачная попытка прикрутить reinforcement learning для shift-reduce парсера, обучаемого на корпусе эталонных разборов.

В этот раз за полтора месяца сделан прототип восходящего вероятностного парсера на чистом питоне.

( Read more... )

Я немного расширил набор фич в модели синтаксического парсинга и сделал предварительный grid search по метапараметрам ( Read more... )

До НГ тестировал парсер на самом тяжелом материале, который есть - на отзывах, которые люди оставляют в инете. В моем случае это отзывы на отдых в разных отелях ( Read more... )

Разбираемое предложение: "I think you know what I mean."
Получаемое дерево зависимостей:
( dependency tree... )

Пересобрал и проверил всё под Linux 32 и 64 бита. Собрал английские словарные базы ( Read more... )

Назначение - отображение деревьев зависимостей по результатам парсинга синтаксическим парсером:( Пример отображение результатов синтаксического разбора...... )

Сергей у себя в презентации http://servponomarev.livejournal.com/7076.html не упомянул еще одну специфическую задачу, где можно попробовать использовать векторные модели лексикона: выбор между альтернативными вариантами построения дерева зависимостей при синтаксическом анализе текста ( Read more... )

Интересно, как вообще в языковую практику приходят такие конструкции:
( Предложение с междуложным паттерном... )